Tlow: Flow-based Item Tokenizer for Recommendation
Tlow：基于流模型的物品分词器，将语义嵌入映射到标准正态空间以提升生成式推荐
🧭 生成式推荐 · Semantic ID 分词 ★ 深度解读
Tsinghua University · Tencent Inc. · Shenzhen International Graduate School, Tsinghua University
用 normalizing flow 将物品语义嵌入转换为维度独立、标准正态的 latent，再做并行 PQ 分词，显著提升生成式推荐的语义 ID 质量与冷启动表现
📌 工作参考价值（4 点）
- 生成式推荐/搜索中做 semantic ID 时，优先用 normalizing flow 预处理 item embedding 再做 PQ，而不是直接在原始 embedding 上 OPQ；尤其适合跨域、多模态、图文混排场景，能显著提升 codebook 语义纯度和解码并行度。
- 代码书对齐损失（MSE 对齐 token 空间与 codebook 空间的 cosine similarity 矩阵）实现简单、可插拔，可作为现有生成式推荐训练的额外正则；但 codebook 本身质量决定上界，需先保证分词语义清晰。
- 工程上线时，token embedding 数量仅 C×S（如 16×256=4096），可替代千万级 item ID embedding；flow 训练在百万级 item embedding 上即可收敛，每日对数千万新物品的 tokenize 仅需单 GPU 几分钟，适合高时效冷启动，例如新品、新内容快速进入召回。
- 线上冷启动验证显示 UCTR 提升 10.32%、新 item UCTR +11.64%，且头部内容曝光占比下降，说明该方法有助于长尾和冷启动分发；电商大促新品、广告新素材 cold-start 可复用该思路。